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摘 要 基于 外 源 性 线索 -靶子 范 
1000~1200 ms) x 3( 目 标 刺激 类 型 : 视觉 、 听 觉 、 


奇 ” EZE?’ JEAN) 


年 健康 人 格 评定 与 培养 协同 创新 中 心 , 大 连 116029) 
Bi, 长春 130022) C 苏州 大 学 心理 学 系 , 心理 与 行为 科学 研究 中 心 ， 苏州 215123) 


式 ， 采 用 2( 线 索 - 靶 子 间隔 时 间 , stimulus onset asynchronies, SOA: 400~600 ms, 
视听 觉 ) x 2( 线 索 有 效 性 : 有 效 线索 、 无 效 线索 ) 的 被 试 内 实验 设 


计 , 要 求 被 试 对 目标 刺激 完成 检测 任务 , 以 考察 视觉 线索 诱发 的 返回 抑制 (inhibition of return, IOR) 对 视听 觉 整合 的 


调节 作用 ， 


从 而 为 感知 觉 敏感 度 、 空 间 不 确定 性 及 感觉 


SOA 增长 , 视觉 IOR 效应 显著 降低 ， 视 听觉 整 


通道 间 信 号 强度 差异 假说 提供 实验 证 据 。 结 果 发 现 : (1) 随 
合 效应 显著 增强 ; (2) KE SOA (400~600 ms) 时 ， 有 效 线索 位 置 上 的 视 
听觉 整合 效应 显著 小 于 无 效 线索 位 置 , 但 长 SOA (1000~1200 ms) 时 ， 有 效 与 无 效 线索 位 置 上 的 视听 觉 整合 效应 


无 显著 差异 。 结 果 表 明 , 在 不 同 SOA 条 件 下 , 视觉 IOR 对 视听 觉 整合 的 调节 作用 产生 变化 ， 当 前 结果 支持 感觉 通 


道 间 信号 强度 差异 假说 。 
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1 前 言 

在 日 常生 活 中 , 我 们 的 大 脑 无 时 无 刻 不 在 接受 
外 在 世界 大 量 的 信息 输入 。 多 感觉 整合 (multisensory 
integration, MSI) 和 外 源 性 空间 注意 (exogenous 
spatial attention) 是 有 助 于 组 合 和 处 理 不 同感 觉 通道 
信息 的 两 种 重要 机 制 (Calvert，Spence, & Stein, 
2004; Spence & Driver, 2004). 多 感觉 整合 是 指 个 体 


将 来 自 不 同感 觉 通 道 (视觉 、 听 觉 、 触 觉 等 ) 的 信息 
相互 作用 并 整合 为 统一 的 、 连 贯 的 和 有 意义 的 知觉 


过 程 (Tang, Wu, & Shen, 2016)。 其 中 , 将 视觉 和 听 
觉 信 息 有 效 整合 的 知觉 过 程 被 称 作 视听 觉 整 合 
reise! integration)。 视 听觉 整合 能 够 促进 刺激 
的 检测 、 识 别 和 定位 (Stein & Stanford, 2008)。 外 源 
性 空间 注意 是 基于 空间 位 置 的 注意 定向 ， 由 显著 的 
突显 性 刺激 (例如 亮度 变化 , 起 伏 或 移动 刺激 ) 以 捕获 
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注意 ， 属 于 注意 自 下 而 上 的 加 工 (Chica，Bartolomeo， 
& Lupidfiez, 2013)。 同 样 ， 外 源 性 空间 注意 也 能 够 
促进 目标 刺激 的 检测 、 识 别 和 定位 (Spence, 2010)。 
例如 ， 外 源 性 线索 能 够 增强 同一 位 置 上 目标 的 感知 
觉 处 理 ， 从 而 加 快 对 目标 的 反应 (Mcdonald， 
Tedersilejarvi Di, & Hillyard, 2005). 
鉴于 视听 觉 整合 与 外 源 性 空间 注意 均 能 增强 
感知 觉 处 理 ， 帮助 我 们 更 好 地 感知 外 部 世界 ,研究 
者 们 开始 探讨 两 者 间 的 关系 (Talsma，Senkowski， 
Soto-Faraco, & Woldorff, 2010; Tang et al., 2016)。 外 
源 性 线索 -靶子 范式 (cue-target paradigm) 是 研究 外 
源 性 空间 注意 的 经 典范 式 (Posner & Cohen, 1984). 
该 范式 主要 以 凸显 特征 (如 方 框 变 亮 或 变 粗 ) 作 为 线 
索 呈 现在 左 或 右 侧 外 周 位 置 , 要求 被 试 在 经 过 一 段 
时 间 间 隔 (stimulus onset asynchronies, SOA) 后 ,对 
呈现 在 与 线索 相同 ( 即 有 效 线 索 , valid cue) 或 不 同 


* 国家 自然 科学 基金 项 目 (31600882; 31700939;61773076), 江苏 省 


养 项 目 (2018LNGXGJWPY-YB015) 资 助 。 


通信 作者 : 


MUET 


基础 研究 计划 (BK20170333)， 辽 宁 省 高 水 平 创 新 团队 国 ( 境 ) 外 培 


, E-mail: tangyu-2006@163.com; 王 爱 君 , E-mail: ajwang@suda.edu.cn 
759 


760 心 理 


ChinaXiv 合 作 期 刊 


学 R 


第 51 卷 


( 即 无 效 线索 , invalid cue) 位 置 上 的 目标 刺激 进行 反 
应 。 结 果 发 现 ， 当 线索 -靶子 间隔 时 间 ( 即 SOA) 小 于 
约 250 ms 时 ， 有 效 线索 位 置 上 的 反应 时 显著 快 于 
无 效 线索 位 置 ， 被 称 为 “ 易 化 效应 (facilitation 
effecb”。 然 而 当 SOA 大 于 300 ms 时 ， 有 效 线索 位 
置 上 的 反应 时 却 显著 慢 于 无 效 线索 位 置 ， 被 称 为 
“返回 抑制 (inhibition of return，IOR) 效 应 ” 
(Martinarévalo, Chica, & Lupiafiez, 2015). 2&F stk, 
研究 者 们 分 别 考察 了 外 源 性 空间 注意 引起 的 易 化 
效应 和 抑制 效应 对 视听 觉 整 合 的 调节 作用 。 

具体 来 看 ，van der Stoep 等 (2015) 考 察 了 外 源 
性 听觉 线索 在 短 SOA (200~250 ms) 条 件 下 引起 的 
易 化 效应 对 视听 觉 整 合 的 调节 作用 。 实验 通 过 声音 
诱发 外 源 性 空间 注意 ,要求 被 试 对 呈现 在 左 或 右 侧 
的 视觉 (visual V) 、 上 听觉 (auditory，A) 和 视听 觉 
(audiovisual, AV) 目标 刺 激进 行 反 应 (Go-trials)， 呈 
现在 中 间 的 刺激 不 反应 (No-go trials)。 结 果 发 现 , 被 
试 对 视听 觉 双 通 道 目 标的 反应 时 显著 快 于 单 通道 
的 视觉 、 听 党 目标 ， 即 ,产生 元 余 信 号 效应 
(redundant signals effect, RSE)。 同 时 ， 外 源 性 空间 
注意 能 够 加 快 有 效 线索 位 置 上 目标 刺激 的 反应 ， 产 
生 易 化 效应 ; 更 重要 的 是 ， 外 源 性 空间 注意 减少 了 
有 效 线索 位 置 上 的 视听 觉 整合 效应 ,在 后 续 研 究 中 ， 
van der Stoep, van der Stigchel, Nijboer 和 Spence 
(2016) 基 于 相同 的 实验 范式 ,考察 了 外 源 性 视觉 线 
索 在 长 SOA (350~450 ms) 条 件 下 诱发 的 IOR 效应 
对 视听 觉 整合 的 调节 作用 。 结 果 发 现 , 虽然 在 反应 
时 结果 上 发 生 反 转 ， 即 目标 刺激 通道 为 视觉 时 产生 
IOR 效应 ,但 有 效 线索 位 置 上 的 视听 觉 整 合 效 应 仍 
然 显著 小 于 无 效 线索 位 置 。 

上 述 研 究 结 果 表 明 , 无 论 是 外 源 性 空间 注意 引 
起 的 易 化 效应 还 是 抑制 效应， 两 者 均 能 减少 有 效 线 
索 位 置 上 的 视听 党 整合 效应 (van der Stoep, van der 
Stigchel, & Nijboer, 2015; van der Stoep et al., 
2016). 为 此 , 人 研究 者 们 提出 多 种 理论 假说 来 解释 外 
源 性 空间 注意 对 视听 觉 整 合 的 调节 机 制 : (1) 感 知觉 
敏感 度假 说 ， 外 源 性 线索 能 够 提高 有 效 线索 位 置 上 


说 , van der Stoep 等 (2015) 认 为 外 源 性 线索 -靶子 范 
式 中 的 线索 不 能 预测 随后 呈现 目标 的 位 置 以 至 于 
产生 更 高 的 目标 位 置 不 确定 性 ， 因 此 被 试 对 目标 的 
反应 要 更 多 依赖 于 线索 诱发 的 空间 定向 。 在 有 效 线 
索 位 置 上 ,外 源 性 线索 与 视听 觉 目标 本 身 引 起 的 空 
间 定 向 信息 是 宛 余 的 ， 当 线索 诱发 的 空间 定向 重要 
性 提高 时 ， 视 听觉 目标 本 身 引 起 的 空间 定向 重要 性 
则 会 降低 ， 最 终 减 少 视听 觉 整 合 效应 。(3) 感 觉 通道 
间 信 号 强度 差异 假说 ， 当 不 同感 觉 通 道 之 间 的 信号 
强度 差异 过 大 时 ,多 感觉 整合 效应 更 小 ， 而 当 不 同 
感觉 通道 之 间 的 信号 强度 相近 时 ,多 感觉 整合 效应 
ŒK (Otto, Dassy, & Mamassian, 2013), van der 
Stoep 等 (2016) 发 现 当 外 源 性 注意 引起 视觉 目标 但 
未 引起 听觉 目标 的 IOR 效应 时 ， 有 效 线索 位 置 上 
视 、 听 感觉 通道 间 加 工 速度 差异 的 增 大 会 导致 信号 
强度 差异 也 随 之 增 大 , 最 终 得 到 有 效 线 索 位 置 上 视 
听觉 整合 效应 减 小 的 结果 。 

上 述 关 于 外 源 性 注意 调节 视听 觉 整 合 的 几 种 
理论 假说 是 研究 者 们 基于 不 同 研究 背景 (不 同性 质 
的 外 源 性 线索 , 不 同 SOA 条 件 ) 所 提出 的 (van der 
Stoep et al., 2015; van der Stoep et al., 2016)。 虽然 在 
行为 学 研究 中 外 源 性 注意 在 不 同 SOA 条 件 下 对 视 
听觉 整合 的 调节 结果 一 致 , 但 其 神经 机 制 可 能 并 不 
—3%(Martinarévalo et al., 2015)。 因 此 ,本 研究 关注 
抑制 效应 对 视听 觉 整 合 的 调节 作用 ,统一 诱发 外 源 
性 空间 注意 的 线索 类 型 。 利 用 操控 SOA 能 够 引起 
TOR 效应 量变 化 的 特性 ,选取 400~600 ms (Tang et 
al., 2019) (in press) 作 为 短 SOA iF, 并 且 参 考 跨 
通道 视 - 听 返回 抑制 相关 文献 (Reuterlorenz, Jha, & 
Rosenquist, 1996; Spence, Lloyd, Mcglone, Nicholls, 
& Driver, 2000), 选取 1000~1200 ms 作为 长 SOA 条 
件 。 考 察 在 不 同 SOA 下 视觉 返回 抑制 对 视听 觉 整 
合 的 调节 作用 。 

综 上 ,本 研究 基于 外 源 性 线索 -靶子 范式 , 利 
用 视觉 线索 诱发 外 源 性 空间 注意 ,操控 SOA 条 件 
(400~600 ms, 1000~1200 ms), 目标 刺激 类 型 (视觉 、 
听觉 、 视 听觉 )、 线索 有 效 性 (有 效 线索 、 无 效 线索 )， 


的 感知 觉 敏 感度 ， 从 而 相对 增强 紧 接着 呈现 在 该 位 
置 上 目标 的 感知 强度 (Carrasco，2011)， 基 于 多 感觉 
加 工 中 的 反比 效应 原则 (principle of inverse 
effectiveness)， 高 强度 刺激 引起 的 多 感觉 整合 效应 
更 小 (Senkowski, Saint-Amour, Héfle, & Foxe, 2011), 
最 终 得 到 有 效 线索 位 置 上 视听 觉 整合 效应 减 小 的 
结果 (van der Stoep et al., 2015)。 (2) 空 间 不 确定 性 假 


同时 在 外 源 性 线索 与 目标 刺激 之 间 加 入 中 央 重 新 
定向 事件 (central reorienting event, CRE) (Prime, 
Visser, & Ward, 2006) 以 诱发 更 稳定 的 IOR 效应 , 考 
察 视觉 IOR 对 视听 觉 整合 的 调节 作用 ， 从 而 为 感知 
觉 敏 感度 、 空 间 不 确定 性 及 感觉 通道 间 信 号 强度 差 
异 假说 提供 实验 证 据 。 基 于 前 人 研究 结果 ,人 研究 预 
期 : 外 源 性 空间 注意 引起 的 IOR 效应 基于 SOA 而 
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变化 ,从 而 影响 对 视听 觉 整合 效应 的 调节 作用 。 


2 方法 
2.1 被 试 


一 方面 , 基于 以 往 关于 外 源 性 空间 注意 与 多 感 
觉 整 合 关 系 研 究 的 样本 量 (van der Stoep et al., 2015; 
van der Stoep et al., 2016); 另 一 方面 ， 基 于 相关 研 
究 中 报告 的 效果 量 以 及 期 望 的 功效 值 (0.8) 所 计算 
的 样本 量 (计算 软件 采用 GPower 3.1.7)。 本 研究 计 
划 样 本 量 17~34 A, 最 终 招 募 某 高 校 在 校 学 生 27 
名 (男生 4 名 , 女生 23 名 ), 年 龄 跨度 为 18~29 岁 ， 
M= 21.74 岁 , SD= 3.46 岁 。 所 有 被 试 的 视力 或 矫正 
视力 正常 ， 听力 正常 , WAAR, 身体 健康 ,无 
精神 系统 疾病 , 无 脑 部 损伤 史 。 被 试 完 成 实验 后 获 
得 一 定 报酬 。 

2.2 ”实验 仪器 和 材料 

实验 刺激 呈现 在 AOC G2770PF(270LM00009) 
型 号 的 液晶 显示 器 上 ， 可 视 尺 寸 为 27 英 寸 , 屏幕 分 
辩 率 为 1024x768 RR, 刷新 率 为 100 Hz。 实 验 程 
序 由 E-prime 1.1 软 件 编程 , 所 有 视觉 刺激 呈现 在 黑 
色 背 景 上 , 亮度 指标 为 0.4 cd/m”。 被 试 在 黑暗 的 实 
验 室 中 单独 参加 测试 , 距离 电脑 屏幕 为 60 cm. 

如 图 1 左 所 示 : 注视 屏 中 , 屏幕 中 心 呈 现 白色 
(RGB: 255, 255, 255; 155.2 cd/m”) 的 加 号 " + "注视 
BL (KÆ: 0.05°x0.05°); 线索 屏 中 , 屏幕 左 / 右 侧 随 
机 出 现 白色 正方 形 ( 长 度 : 1°x1°; 离 中 央 注 视点 : 
4.5°) 作 为 外 源 性 线索 引起 该 位 置 的 注意 ; 中 央 线 索 
屏 中 ,中 央 注 视点 变 大 变 粗 (长 度 : 0.1°x0.1°) 作 为 
中 央 位 置 的 重新 定向 ; 目标 刺激 屏 中 ,分别 呈现 视 
觉 .听觉 和 视听 觉 刺 激 。 视 觉 目标 刺激 为 红色 (RGB: 
255, 0, 0; 27.5 cd/m”) 与 白色 组 成 的 棋盘 格 (长 
度 :1°x1°)。 听觉 目标 刺激 采用 SoundEngine Free $K 
件 制作 和 处 理 , 为 1000Hz 的 纯音 (65 dB, 100 ms, 
10 ms 的 rise 和 fall time), 通过 位 于 屏幕 后 两 侧 ( 左 / 
右 ) 的 扬声器 呈现 ( 离 中 央 注 视点 : 19°), 视听 觉 目标 
刺激 由 视觉 和 听觉 目标 刺激 同时 呈现 。 

2.3 ”实验 程序 与 实验 设计 

实验 采用 2(SOA 条 件 : 400~600 ms、1000~ 
1200 ms) x 3( 目 标 刺激 类 型 . 视觉 、 听 觉 、 视 听觉 ) 
x 2( 线 索 有 效 性 : 50% 有 效 线索 、50% 无 效 线索 ) 的 
被 试 内 实验 设计 。 实 验 包括 练习 和 正式 实验 ,练习 
实验 共 56 个 试 次 , 正式 实验 共 4 组 , 每 组 210 个 试 
次 ,其 中 2 组 为 短 SOA (400~600 ms) 条 件 ， 另 外 2 
组 为 长 SOA (1000~1200 ms) 条 件 , 4 组 随机 呈现 。 


实验 中 ,目标 刺激 占 6/7, 捕获 刺激 占 1/7 (无 任何 
目标 刺激 出 现 )， 要 求 被 试用 优势 手 的 食指 既 快 又 
准 地 对 目标 刺激 进行 按键 反应 (键盘 上 的 “B”)。 由 于 
实验 中 的 捕获 刺激 试 次 无 任何 目标 刺激 出 现 ， 因此 
仅 分 析 包 含 目 标 刺激 的 试 次 (6/7), FE 720 个 试 次 ， 
平均 每 种 实验 条 件 下 60 个 试 次 随机 呈现 。 每 组 结 
束 后 ， 给 予 正确 次 数 的 反馈 ,被 试 可 以 在 组 间 进 行 
短暂 休息 。 整 个 实验 大 约 持 续 一 个 小 时 。 

实验 阶段 单个 试 次 的 流程 如 图 1 右 所 示 : 首先， 
注视 点 随机 呈现 800~1000 ms, 接 下 来 屏幕 左 / 右 侧 
随机 出 现 白 色 正 方形 (视觉 线索 ), 时 间 为 50 ms, 经 
150~250 ms 或 450~550 ms 随机 时 间 间 隔 后 ,注视 
点 变 大 变 粗 (视觉 中 心 线索 ), 时 间 为 50 ms， 中 心 
线索 消失 后 ,同样 经 150~250 ms 或 450~550 ms 的 
随机 时 间 间 隔 后 ， 目 标 刺激 (V/A/AV) 出 现在 屏幕 的 
左 / 右 侧 ， 持 续 时 间 为 100 ms。 最 后 ,注视 点 呈现 
1000 ms 允许 被 试 进行 按键 反应 。 要 求 被 试 在 整个 
实验 中 都 盯 住 中 央 注 视点 直到 结束 。 

2.4 数据 分 析 

反应 时 数据 按照 以 下 标准 进行 删除 : 被 试 反应 
错误 ; 没有 反应 ; 反应 时 小 于 100 ms 或 超过 1000 ms. 
最 终 数 据 删 除 量 占 总 数据 的 1.3%。 

为 了 比较 不 同 条 件 下 的 相对 多 感觉 反应 增强 
(relative amount of multisensory response enhancement, 
rMRE), 采用 公式 (a) 对 视听 觉 目 标 反 应 时 与 单 通道 
目标 (视觉 、 听 觉 ) 中 最 快 反 应 时 的 相对 差 值 进行 计 
算 。rMRE 值 反映 了 与 单 通道 目标 (视觉 、 听 觉 ) 中 
最 短 的 反应 时 相 比 , 个 体 对 多 感觉 通道 目标 反应 时 
的 加 速 或 减速 的 相对 量 , 代表 多 感觉 反应 增强 效应 。 
rMRE = 
min(median(RT, ), median( RT, )—median(RT,,, )) 100% 

min(median( RT, ), median(RT, )) 


(a) 

对 于 宛 余 信号 效应 的 解释 ， 有 竞争 模型 (race 
model) 和 共 激 活 模型 (co-activation model) 两 种 假设 
(刘强 , 2010)。 当 加 工 多 感觉 通道 刺激 时 , 不 同感 觉 
道 刺激 被 分 别 加 工 ， 最 先 完成 加 工 的 感觉 通道 优 
先 触发 被 试 的 反应 ， 这 种 效应 被 称 为 统计 促进 
(statistical facilitation)， 符 合 竞争 模型 假设 (Raab， 
1962)。 若 不 同感 觉 通 道 的 刺激 均 被 激活 并 在 特定 
的 时 间 点 上 整合 为 统一 连贯 的 知觉 信息 并 共同 作 
用 于 随后 的 加 工 ， 其 融合 信息 的 强度 及 可 靠 度 相 比 
任 一 单 通 道 信 息 的 强度 和 可 靠 度 都 高 , 则 代表 产生 
多 感觉 整合 效应 ， 符 合共 激活 模型 (co-activation 
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图 1 


SOA 
400~600 ms 
1000~1200 ms 


800~1000 ms 


50 ms 


ISI 
150~250 ms/450~550 ms 


视觉 中 心 线索 
50 ms 


ISI 
150~250 ms/450~550 ms 


目标 刺激 (V/A/AV) 
100 ms 


ITI 
1000 ms 


注 : 图 左 为 刺激 呈现 位 置 的 示意 图 ， 图 右 为 单个 试 次 的 流程 图 。 图 右 中 视觉 线索 (白色 正方 形 ) 旦 现在 左 侧 ,目标 (视听 觉 ) 也 呈现 在 左 
侧 ( 即 ， 有 效 线索 位 置 ), 要 求 被 试 对 目标 刺激 进行 既 快 又 准 的 检测 反应 。 其 中 , 目标 刺激 (V/A/AV) 分 别 代表 视觉 (visual)、 听 觉 
(auditory) 和 视听 觉 (audiovisual) 通 道 日 标 。ISI 是 指 刺 激 间 时 间 间 隔 (inter-stimulus interval). ITI 是 指 试 次 间 的 时 间 间 隔 (inter-trial 


interval), SOA 的 计算 是 由 视觉 线索 时 间 (50 ms), 2 个 IST 时 间 (150~250 ms/450~550 ms) 以 及 视觉 中 心 线 索 时 间 (50 ms) 相 加 而 得 ， 因 


此 SOA 为 400~600 ms/1000~1200 ms。 


model) (Miller, 1982，1986)。 为 了 评估 rMRE 结果 

是 由 统计 促进 (statistical facilitation) 还 是 多 感觉 整 

合 来 解释 , 采用 公式 (b) (竞争 模型 不 等 式 ，race 

model inequality) (Miller, 1986; Raab, 1962; Ulrich, 
Miller, & Schröter, 2007) 来 进行 计算 。 

P(RTpacemodel < t) = P(RT, <t)+P(RT, <t) (b) 

在 上 述 公 式 中 , P 代表 累积 分 布 函 数 (cumulative 


下 显著 违反 竞争 模型 时 间 窗 口内 的 曲线 下 正 值 面 
积 (Yang et al., 2014) 进 行 比 较 能 够 确定 整合 效应 的 
大 小 。 

以 上 两 种 指标 从 不 同 侧面 反映 了 多 感觉 整合 
效应 。Race Model (Probability difference) 是 指 在 各 
个 时 间 点 上 的 累积 分 布 概率 ， 即 ,各 个 时 间 点 上 整 
合 效 应 的 大 小 ,而 曲线 下 正 值 面积 (pAUC) 是 指 所 有 


distributive functions, CDF)， 即 在 给 定时 间 t 内 对 目 
标 反 应 的 概率 值 。P (CRTA < fb 是 单 通道 听觉 试 次 在 
给 定时 间 t 内 的 反应 概率 值 ， 而 P (RT, < 0 是 单 通道 
视觉 试 次 在 给 定时 间 t 内 的 反应 概率 值 , 通过 该 公 
式 能 够 计算 出 竞争 模型 的 预测 累积 概率 值 (predicated 
cumulative probability, CP), BI CPgace mode IER I 
测 的 统计 促进 的 上 限 值 (Miller 1982，1986; Ulrich 
et al., 2007)。Race Model (Probability difference) 代 
表 视 听 CDF 与 竞争 模型 CDF 在 RT 范围 内 (本 研究 
为 0~1000 ms) 每 10 ms 上 的 概率 差异 (Laurienti， 
Burdette, Maldjian, & Wallace, 2006)。 若 在 给 定 反 应 
时 范围 内 , 实际 CPay 显著 大 于 预测 CPrace nodes BI 
显著 违反 竞争 模型 ， 代 表 发 生 多 感觉 整合 效应 
Ulrich et al., 2007)。 视 听 条 件 下 的 CDF 与 竞争 模 
型 CDF 之 差 表 示 多 感觉 整合 效应 大 小 。 基 于 苋 争 
模型 不 等 式 违反 曲线 ,能 够 计算 出 曲线 下 正 值 面积 
(positive area under the curve, pAUC),， 对 不 同 条 件 


lz 


Yi 


H 


产生 整合 效应 时 间 段 上 的 总 体 累 积分 布 差 异 ， 即 ， 
特定 时 间 段 (例如 , 280~350 ms) 上 整合 效应 的 大 小 。 


3 结果 与 分 析 


数据 分 析 前 ， 按 以 下 标准 剔除 被 试 : (1) 个 人 反 
应 时 或 正确 率 超 出 总 平均 反应 时 、 正 确 率 的 正 负 3 
个 标准 差 。(2) 捕 获 刺激 的 个 人 平均 虚报 率 大 于 
10%。 最 终 剔 除 被 试 3 人 ,剩余 有 效 被 试 24 人 。 经 
统计 ， 即 使 包含 删除 数据 ， 现 有 统计 结果 的 各 主 效 
应 与 交互 作用 的 显著 性 也 没有 改变 。 
3.1 正确 率 

对 正确 率 进行 2(SOA 条 件 : 400~600 ms、 
1000~1200 ms) x 3( 目 标 刺 激 类 型 : 视觉、 听觉 、 视 
听觉 ) x 2( 线 索 有 效 性 : 有 效 线索 、 无 效 线索 ) 的 重 
复 测量 方差 分 析 。 
吉 果 显示 : SOA 主 效应 不 显著 , FC, 23) = 0.13， 
p = 0.72; 目标 刺激 类 型 主 效应 不 显著 , F(2, 46) = 
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2.35, p = 0.11; 线索 有 效 性 主 效 应 不 显著 , F(1, 23) = 
0.01, p = 0.92; 各 因素 间 的 交互 作用 均 不 显著 , Fs 
< 2.35, ps> 0.11。 

研究 结果 显示 ,所 有 被 试 在 各 目标 刺激 类 型 
(视觉 、 听 觉 、 视 听觉 ) 上 的 正确 率 均 高 达 95% 以 上 ， 
各 因素 主 效应 及 其 交互 作用 均 不 显著 , 并 没有 表现 
出 对 双 通 道 目标 的 加 工 优势 。 这 可 能 是 由 于 本 研究 
中 采用 的 检测 任务 相 比 以 往 人 研究 中 的 Go/No-go 定 
位 检测 任务 (van der Stoep et al., 2015; van der Stoep 
et al.，2016) 更 简单 ， 出 现 天 花 板 效应 而 造成 ,因此 
后 面 不 再 对 正确 率 进 行进 一 步 讨论 。 
3.2 ”反应 时 

对 反应 时 进行 2 (SOA 条 件 : 400~600 ms, 
1000~1200 ms) x 3( 目 标 刺 激 类 型 : 视觉 、 听 觉 、 视 
听觉 ) x 2( 线 索 有 效 性 : 有 效 线索 、 无 效 线索 ) 的 重 
复 测量 方差 分 析 。 

结果 显示 : SOA 主 效应 显著 , F(1, 23) = 4.60, 
p = 0.043, m3=0.17, 短 SOA 条 件 下 反应 时 (322 ms) 
显著 快 于 长 SOA 条 件 (334 ms)。 目标 刺 激 类 型 主 效 
应 显著 , F(2, 46) = 99.06, p < 0.001, m3 = 0.81， 进 一 
步 分 析 表 明 ， 视 听觉 目标 反应 时 (301 ms) 显 著 快 于 
听觉 目标 (331 ms, p < 0.001) 与 视觉 目标 (352 ms, p < 
0.001)， 听 党 目标 反应 时 (331 ms) 显 著 快 于 视觉 
标 (352 ms, p < 0.001)。 线 索 有 效 性 主 效 应 显著 , FC, 
23) = 165.27, p < 0.001, n= 0.88， 无 效 线索 位 置 上 
的 反应 时 (319 ms) 显 著 快 于 有 效 线索 位 置 (336 ms)。 

三 因素 交互 作用 显著 , F(2, 46) = 6.95, p = 
0.003, ni = 0.23。 在 短 SOA 条 件 下 ,目标 刺激 类 型 
与 线索 有 效 性 交互 作用 显著 , F(2, 46) = 59.15, p < 


(a) 4005 六 六 六 六 六 六 


图 有 效 线索 
口 无 效 线索 


350 4 


kkk 


平均 反应 时 (ms) 
S 
1 


250 4 


200 
视听 觉 ”视觉 


短 SOA 


听觉 ”视听 觉 ”视觉 
长 SOA 


图 2 不 同 条 件 下 的 


0.001, mi = 0.72。 具 体 结果 如 图 2(a) 所 示 : 在 听觉 
目标 上 ， 无 效 线索 位 置 (320 ms) 与 有 效 线索 位 置 
(322 ms) 上 的 反应 时 无 显著 差异 ; 在 视听 觉 目 标 上 ， 
无 效 线索 位 置 上 的 反应 时 (M = 287 ms, SD = 42.55 ms) 
显著 快 于 有 效 线索 位 置 (M = 303 ms, SD = 42.27 ms, 
t(23) = 7.43, p < 0.001, d = 0.37, 95% CI = [11.55, 
20.45]); 在 视觉 目标 上 ， 无效 线索 位 置 上 的 反应 时 
(M = 330 ms, SD = 52.23 ms) 显 著 快 于 有 效 线索 位 
置 (M = 368 ms, SD = 48.41 ms, t(23) = 11.09, p < 
0.001, d = 0.76, 95% CI = [31.54, 46])。 另 外 , 在 长 
SOA 条 件 下 ， 目 标 刺 激 类 型 与 线索 有 效 性 交互 作 
用 也 显著 , F(2, 46) =14.42, p < 0.001, mr = 0.39, 简 
单 效 应 分 析 结 果 显 示 : 在 听觉 目标 上 ，, 无效 线 索 位 
置 上 的 反应 时 (M = 337 ms, SD = 60.14 ms) 显 著 快 
于 有 效 线索 位 置 (M = 343 ms, SD = 56.57 ms, 
t(23) = 2.26, p = 0.033, d = 0.1, 95% CI = [0.51, 
11.24); 在 视听 觉 目标 上 ， 无 效 线索 位 置 上 的 反应 
时 (M = 300 ms, SD = 52.72 ms) 显 著 快 于 有 效 线索 
位 置 (M = 311 ms, SD = 55.61 ms, t(23) =4.51, p < 
0.001, d = 0.2, 95% CI = [5.88, 15.83]); 在 视觉 目标 
E, 无 效 线索 位 置 上 的 反应 时 (M = 342 ms, SD = 
59.82 ms) 仍 然 显 著 快 于 有 效 线索 位 置 (M = 369 ms, 
SD = 56.51 ms, t(23) = 7.38, p < 0.001, d = 0.46, 95% 
CI = [19.42, 34.54]). TI JL, BRA SOA 条 件 下 的 听 
觉 目标 未 发 生 显著 的 IOR 效应 外 , 其它 条 件 下 均 发 
生 显著 的 TOR 效应 。 依 据 Cohen 提出 对 mp 值 效 果 
量 大 小 的 判断 标准 (Cohen, 1988), 本 人 研究 中 所 有 方差 
分 析 的 效果 量 均 较 大 ， 因 此 以 下 不 再 歼 述 。 另 外 , 依 
HE Cohen 提出 对 d 值 效果 量 大 小 的 判断 标准 , d = 0.2、 


kokk 

(b) 45 - =] 
40 -| 国 短 SOA 
35 | O 长 SOA 


听觉 视听 党 视觉 
目标 刺激 通道 


F 均 反应 时 和 TOR 效应 


TE: 图 (a) 中 的 反应 时 结果 为 平均 中 位 数 。 图 (b) 中 IOR 效应 由 有 效 线索 位 置 上 目标 的 平均 反应 时 减 去 无 效 线索 位 置 上 目标 的 平均 反 


应 时 。* p < 0.05; *** p < 0.001。 
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d=0.5 和 d= 0.8 分别 对 应 于 小 .中 大 的 效应 量 ( 温 
忠 库 ， 范 息 涛 ， 叶 宝 娟 ， 陈 宇 帅 ，2016)， 因 此 在 长 
SOA 条 件 下 , 虽然 听觉 目标 上 IOR 效应 达到 显著 
EKF, 但 效应 量 较 小 ， 并 不 能 代表 该 条 件 下 听觉 
目标 能 产生 稳定 的 IOR 效应 。 
3.3 ”返回 抑制 [IOR) 

首先 计算 出 不 同 SOA 条 件 下 各 目标 刺激 类 型 
的 TOR 效应 量 (有 效 线索 减 去 无 效 线索 位 置 上 的 平 
均 反 应 时 )， 再 对 其 进行 2(SOA ALF: 400~600 ms 
1000~1200 ms) x 3( 目 标 刺 激 类 型 : 视觉、 听觉 、 视 
听觉 ) 的 重复 测量 方差 分 析 。 

结果 如 图 2(b) 及 表 1 所 示 : SOA 主 效应 显著 ， 
F(1, 23) = 4.81, p = 0.039, = 0.17, i SOA 条 件 的 
IOR 效应 (18.87 ms) 显 车 大 于 长 SOA (14.57 ms, p = 
0.039)。 目标 刺激 类 型 主 效应 显著 , F(2, 46) =47.95, 
p < 0.001, ni = 0.68, 视觉 目标 的 IOR 效应 (32 ms) 
显著 大 于 视听 觉 目标 (13 ms, p < 0.001) 和 听觉 目标 
(4 ms, p < 0.001); 视听 觉 目 标的 IOR 效应 (13 ms) 
著 大 于 听觉 目标 (4 ms, p = 0.001). 目标 刺激 类 型 
与 SOA 交互 作用 显著 , F(2, 46) = 6.09, p = 0.005, 
np= 0.21， 配 对 比较 结果 显示 : 在 听觉 与 视听 觉 目 
标 上 , 不 同 SOA 之 间 的 IOR 效 应 没有 显著 差异 , 但 
在 视觉 目标 上 , 短 SOA 条 件 的 IOR 效应 (M = 39 ms, 
SD = 17.13 ms) 显 车 大 于 长 SOA (M = 27 ms, SD = 
17.9 ms, p = 0.001, t(23) = -3.72, p = 0.001, d = 0.67, 
95% CI = [5.24, 18.34]). Hh, TERE SOA ATF F, 
视觉 目标 IOR 效应 (M = 39 ms, SD = 17.13 ms) i # 
大 于 视听 觉 目 标 (M = 16 ms, SD = 10.55 ms, t(23) = 
6.41, p < 0.001, d = 1.6, 95% CI = [-30.12, 15.43]). 
EK SOA 条 件 下 ,视觉 目标 IOR 效应 (M = 27 ms, 
SD = 17.9 ms) 也 显著 大 于 视听 觉 (M = 11 ms, SD = 
11.79 ms, t(23) = -3.21, p = 0.004, d = 1.06, 95% 
CI = [-26.51, -5.74])。 依 据 Cohen 提出 对 d 值 效 果 
量 大 小 的 判断 标准 ,我 们 有 充分 理据 认为 : 相 比 长 
SOA 条 件 ， 视觉 IOR 在 短 SOA 条 件 下 的 效应 量 更 
K, 且 无 论 在 短 还 是 长 SOA 条件 下 , 视觉 IOR 效应 
量 的 确 大 于 视听 觉 TOR 效应 。 
3.4 ”相对 多 感觉 反应 增强 (rMRE) 

首先 对 不 同 SOA 条 件 不 同 线索 有 效 性 的 
rMRE 进行 单 样本 t 检 验 (与 0 进行 比较 ), ts (23) > 
7.58, ps < 0.001, 结果 显示 均 显著 大 于 0, 代表 与 单 
通道 (视觉 或 听觉 ) 目 标 中 最 短 的 反应 时 相 比 , 个 体 
对 同时 呈现 的 双 通 道 视听 觉 目标 反应 更 快 , PEI 
余 信 号 效应 。 接 下 来 对 rMRE 进行 2(SOA 条 件 : 
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R1 不 同 SOA 条 件 下 Cueing effect. rMRE. pAUC 


结果 对 比 
条 件 di 95% CI ; p 
下 限 ER 
短 SOA 
Cueing effect (ms) 
V 38.77 31.54 46.00 11.09 0.000 
A 1.83 -1.43 5.10 1.16 0.257 
AV 16.00 11.55 20.45 7.43 0.000 
Cueing effect X} FE (ms) 
AV vs. V 22.77 -30.12 -15.43 -6.41 0.000 
V vs. A 36.94 28.53 45.34 9.09 0.000 
AV vs. A 14.17 9.06 19.28 5.74 0.000 
rMRE 对 比 (%) 
无 效 vs. 有 效 3.20 1.53 4.87 3.97 0.001 
pAUC 对 比 (ms) 
无 效 vs. 有 效 4.30 -6.64 -1.96 -3.80 0.001 
长 SOA 
Cueing effect (ms) 
V 26.98 19.42 34.54 7.38 0.000 
A 5.88 0.51 11.24 2.26 0.033 
AV 10.85 5.88 15.83 4.51 0.000 
Cueing effect X} FE (ms) 
AV vs. V 16.13 —26.51 5.74 -3.21 0.004 
Vvs. A 21.10 14.24 27.97 6.36 0.000 
AV vs. A 4.98 -2.88 12.84 1.31 0.203 
TMRE 对 比 (%) 
无 效 vs. 有 效 0.4 -178 2.59 0.38 0.706 


pAUC Xf EK (ms) 

无 效 vs. 有 效 2.14 -1.12 5.40 
YE: Cueing effect 为 有 效 线索 减 去 无 效 线索 值 ,M 为 平均 数 , 95% 
CI 为 95% 置 信 区 间 , rMRE 代表 相对 多 感觉 反应 增强 , pAUC 代 
表 曲 线 下 正 值 面积 。 无 效 vs. 有 效 代 表 对 无 效 线索 与 有 效 线索 
进行 配对 样本 t( 双 尾 ) 检 验 。 


1.36 0.188 


400~600 ms, 1000~1200 ms) x 2( 线 索 有 效 性 : 有 效 
线索 、 无 效 线索 ) 的 重复 测量 方差 分 析 。 结 果 如 图 
4(a) 所 示 : SOA 主 效应 不 显著 , F(1, 23) = 3.66, p > 
0.05。 线 索 有 效 性 主 效应 显著 , F(1, 23) = 6.63, p = 
0.017, np = 0.22， 无 效 线索 位 置 上 的 IMRE (8.97%) 
显著 大 于 有 效 线索 位 置 (7.16%)。SOA 与 线索 有 效 
性 交互 作用 显著 , F(1, 23) = 4.98, p = 0.036, my = 
0.18, 配对 比较 结果 显示 : 在 短 SOA 条 件 下 ,无 效 
线索 位 置 上 的 rMRE (M = 9.13%, SD = 4.07%) i 
大 于 有 效 线索 位 置 (M = 5.93%, SD = 3.83%, t(23) = 
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-3.97, p = 0.001, d = 0.81, 95% CI = [-4.87, -1.53])。 
然而 在 长 SOA 条 件 下 ， 有 效 线索 位 置 (M = 8.39%, 
SD = 3.78%) 与 无 效 线索 位 置 (M = 8.79%, SD = 
3.93%) 上 的 rMRE 不 存在 显著 差异 , t(23) = -0.38， 
p= 0.706。 依据 Cohen 提出 对 d 值 效果 量 大 小 的 判 
MIRE, 我 们 有 充分 理据 认为 : 在 短 SOA 条 件 下 ， 
无 效 线索 位 置 上 的 (MRE 的 确 大 于 有 效 线索 位 置 。 
3.5 ”竞争 模型 分 析 (race model) 

首先 , 在 反应 时 0~1000 ms 区间 , 求 出 每 10 ms 
时 间 段 上 不 同 SOA 条 件 下 不 同 线索 有 效 性 的 概率 
值 : WIE P (RT, <t), WTE P (RT, < 名和 视听 党 P 
(RTay < 日。 不同 条 件 下 实际 AV 累积 概率 (CPay) 与 
竞争 模型 预测 累积 概率 (CPgace mogel) 在 反应 时 (0~ 
1000 ms) 上 的 结果 如 图 3(a-b) 所 示 。 其 次 , 将 不 同 
SOA 条 件 下 不 同 线索 有 效 性 的 CPay 减 CPRace model 
的 累计 概率 差异 值 在 每 10 ms 上 进行 单 样 本 t 检 验 
(与 0 进行 比较 )。 结 果 如 图 3(c) 所 示 : 在 短 SOA 
(400~600 ms) 条 件 下 ， 有 效 线索 位 置 上 显著 违反 竞 


短 SOA 
Mio, 
0.8 =2-AV 
— 1 
w race mode 
RK 0.4 
0.2 
0 
100 200 300 400 500 600 700 800 9001000 
反应 时 (ms) 
(b) 10 
0.8 - -- AV 
— race model 
0.6 
IA È 
RR m04 
0.2 
o. ; 
100 200 300 400 500 600 700 800 900 1000 
反应 时 (ms) 
(©) 0.15- 
- - 有效 线索 
i 0.104 一 无 效 线索 
W 0.05 4 
= 
K OF 
Be * 
一 0.05 4 = 
—0.10 


反应 时 (ms) 


so 
100 200 300 400 500 600 700 800 900 


争 模 型 (显著 大 于 0) 的 时 间 窗 口 是 80 ms (280 ~ 
350 ms), ts (23) > 2.64, ps < 0.015， 峰 值 在 320 ms, 
为 0.07。 无 效 线索 位 置 上 显著 违反 竞争 模型 的 时 间 
窗口 是 130 ms (230~360 ms), ts (23) > 2.25, ps < 
0.035, 峰值 在 310 ms, 为 0.08。 在 长 SOA (1000~ 
1200 ms) 条 件 下 ， 有 效 线索 位 置 上 显著 违反 竞争 模 
型 的 时 间 窗 口 是 160 ms (220 ~ 370 ms), ts (23) > 
2.78, ps < 0.025， 峰 值 在 320 ms， 为 0.11 。 无 效 线索 
位 置 上 显著 违反 竞争 模型 的 时 间 窗 口 是 120 ms 
(230 ~ 340 ms), ts (23) > 2.24, ps < 0.035, 峰值 在 
290 ms, 为 0.09。 即 在 短 SOA 条 件 下 ,无 效 线索 位 
置 相 比 有 效 线索 位 置 违 反 竞 争 模 型 的 时 间 窗 口 更 
K, 发 生 的 时 间 更 早 且 峰值 更 大 ; 在 长 SOA 条 件 
下 ， 有 效 线索 位 置 反 而 比 无 效 线索 位 置 违反 竞争 模 
型 的 时 间 窗 口 更 长 ， 发 生 时 间 窗 口 更 晚 且 峰 值 更 
大 。 上 述 结 果 表 明 , 在 短 SOA (400~600 ms) 条 件 下 ， 
无 效 线索 位 置 上 的 视听 觉 整合 效应 大 于 有 效 线索 
位 置 ， 然 而 在 长 SOA (1000~1200 ms) 条 件 下 ， 有 效 
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图 3 AE SOA 条 件 下 不 同 线索 有 效 性 的 反应 时 竞争 模型 分 析 
注 : 图 (c) 中 加 粗 横 线 表示 显著 违反 竞争 模型 (实际 AV 累积 概率 (CPAv) 显 著 大 于 竞争 模型 预测 累积 概率 (CPaoce mode)) 的 时 间 窗 口 ， 红 
色 虚 线 代表 有 效 线索 位 置 ， 黑色 实 线 代表 无 效 线索 位 置 。* 代 表 峰 值 (最 大 概率 值 ) 出 现 的 时 间 。 
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线索 位 置 上 的 视听 觉 整合 效应 反而 大 于 无 效 线索 
位 置 。 
3.6 ”曲线 下 正 值 面积 (pAUC) 

对 pAUC 进行 2(SOA 条 件 : 400~600 ms、 
1000~1200 ms) x 2( 线 索 有 效 性 : 有 效 线 索 、 无 效 线 
索 ) 的 重复 测量 方差 分 析 。 结果 如 图 4(b) 所 示 : SOA 
主 效应 显著 , FC, 23) = 6.66, p = 0.017, n, = 0.22, 
长 SOA 条 件 下 的 pAUC (9.92 ms) 显 著 大 于 短 SOA 
条 件 (7.23 ms)。 线 索 有 效 性 主 效应 不 显著 , F(1, 23) 
= 0.55, p > 0.05。SOA 与 线索 有 效 性 交互 作用 显著 ， 
F(1, 23) = 16.28, p = 0.001, n$ = 0.41。 配对 比较 结果 
显示 : 在 短 SOA 条 件 下 ,无效 线索 位 置 上 的 pAUC 
(M = 9.38 ms, SD = 4.92 ms) 显 著 大 于 有 效 线索 位 置 
(M = 5.08 ms, SD = 3.73 ms, t(23) = —3.8, p = 0.001, 
d = 0.99, 95% CI = [-6.64, -1.96]); 而 在 长 SOA 条 
件 下 ,无 效 线索 (M = 8.85 ms, SD = 6.03 ms) 与 有 效 
线索 位 置 上 的 pAUC (M =10.99 ms, SD = 7.35 ms) 
无 显著 差异 。 依据 Cohen 提出 对 d 值 效果 量 大 小 的 
判断 标准 , 我 们 有 充分 理据 认为 :在 短 SOA 条 件 下 ， 
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图 4 不 同 SOA 条 件 下 不 同 线索 有 效 性 的 rMRE/pAUC 


iE: * p < 0.05; ** p < 0.01. 


无 效 线索 位 置 上 pAUC 显著 大 于 有 效 线索 位 置 。 
3.7” 单 通道 视 、 听 党 反 应 时 差异 结果 分 析 
首先 对 单 通道 视 (V)、 听 觉 (A) 反 应 时 差异 绝对 
值 与 rMRE (M = 9.21%, SD = 3.16%) 进 行 皮 尔 逊 相 
关 分 析 。 结 果 显 示 单 通道 A、V 反应 时 之 差 与 MRE 
间 存 在 显著 负 相 关 (r = - 0.716, p < 0.001),， 即 , 单 
通道 A、V 反应 时 之 差 越 小 , rMRE K, 反之 亦 然 。 
前 人 研究 发 现 当 不 同感 觉 通道 之 间 的 信号 强度 差 
异 过 大 时 ,多 感觉 整合 效应 更 小 ， 而 当 不 同感 觉 通 
道 之 间 的 信号 强度 相近 时 ,多 感觉 整合 效应 更 大 
(Otto et al., 2013)。 因 此 ， 当 有 效 线索 位 置 上 单 通道 
A.V 反应 时 之 差 过 大 时 ， 信 和 号 强度 差异 也 更 大 , 视 
听觉 整合 效应 相应 减 小 ， 而 在 无 效 线索 位 置 上 单 通 
Š A, V 反应 时 之 差 相 近 时 , 信号 强度 差异 也 更 近 ， 
视听 觉 整合 效应 则 更 大 。 
进一步 对 不 同 线索 有 效 性 位 置 上 不 同 SOA 条 
件 下 的 单 通道 A、V 反应 时 之 差 进 行 比较 。 结 果 如 
图 $ 所 示 :在 有 效 线索 位 置 上 , 短 SOA 条 件 下 的 单 
通道 A、V 反应 时 之 差 显 著 大 于 长 SOA 条 件 [46 ms 
vs. 35 ms, t(23) = 2.42, p = 0.024]。 而 在 无 效 线索 位 
AE, 短 SOA 与 长 SOA 条 件 下 的 单 通 道 A、YV 反 
应 时 之 差 并 无 显著 差异 [19 ms vs. 21 ms, t(23) = 
—0.398, p > 0.05。 可 见 , 在 有 效 线索 位 置 上 ， 短 


SOA 条 件 下 单 通道 A、V 反应 时 之 差 显 著 大 于 长 
SOA 条 件 下 ， 因 而 短 SOA 条 件 下 的 视听 觉 整 合 效 


应 显著 减 小 。 
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有 效 线索 无 效 线索 
图 5 AE SOA 条 件 下 不 同 线索 有 效 性 的 视 、 听 觉 反 应 
时 之 差 
注 : *p < 0.05。 
4 讨论 


本 研究 基于 外 源 性 线索 - 骤 子 范式 ， 由 注视 点 
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两 侧 的 白色 正方 形 作 为 外 源 性 视觉 注意 线索 ， 同 时 
操控 不 同 SOA 条 件 (400~600 ms, 1000~1200 ms), 
目标 刺激 类 型 (视觉 、 听 觉 、 视 听觉) 和 线索 有 效 性 
(有 效 线索 、 无 效 线索 ) 来 考察 视觉 IOR 对 视听 觉 整 
合 的 调节 作用 。 

4.1 不 同 目标 刺激 类 型 上 的 IOR 效应 

研究 发 现 ,在 听觉 通道 目标 上 , IEK SOA% 
件 下 发 现 IOR 效应 。 以 往 研 究 结果 显示 ,， 相 比 诱发 
同一 感觉 通道 内 的 IOR， 路 通道 IOR 的 发 生 会 有 所 
延迟 。 例 如 , 视觉 线索 在 SOA 1050~1250 ms (Spence 
et al., 2000) 以 及 1000/1300 ms 条 件 下 (Reuter-Lorenz， 
Jha, & Rosenquist, 1996) 成 功 诱发 听觉 IOR 效应 。 
而 在 SOA 350~450 ms (van der Stoep et al., 2016), 
575 ms (Schmitt, Postma, & De, 2000) 以 及 650 ms 
(Yang & Mayer, 2014) 条 件 下 并 未 诱发 出 听觉 IOR 
效应 .可 见 ,， 通 常 在 更 长 的 SOA 条件 下 才能 观察 到 
路 通道 视 - 听 觉 IOR 效应 (Spence et al., 2000; Ward, 
Mcdonald, & Lin, 2000)。 因 此 , 本 研究 中 ,上 听 党 目 
标的 IOR 效应 只 在 长 SOA (1000~1200 ms) 条 件 下 被 
观察 到 。 

在 视觉 通道 目标 上 , 随 SOA 的 增长 , 视觉 IOR 
效应 显著 降低 ,这 与 以 往 研究 结果 部 分 一 致 (Agusti， 
Satorres, Pitarque, & Meléndez, 2017; Wascher & 
Tipper, 2004)。 然 而 也 有 研究 表明 ,在 一 定时 间 ( 例 
如 , 1000 ms) 范 围 内 ， 随 SOA 的 增长 , IOR 效应 有 所 
增强 (Tassinari, Aglioti, Chelazzi, Peru, & Berlucchi, 
1994; Wascher & Tipper, 2004). 

在 视听 觉 通道 目标 上 ,无 论 在 短 还 是 长 SOA 
条 件 下 均 发 生 显著 的 IOR 效应 , 但 两 者 之 间 并 无 显 
著 差 异 。van der Stoep 等 (2016) 在 SOA 为 350~450 ms 
的 条 件 下 ， 并 未 得 到 视觉 线索 能 够 诱发 视听 觉 目标 
IOR 的 结果 。 分 析 其 原因 : 一 方面 , 可 能 是 由 于 本 
研究 中 加 入 的 中 央 重 新 定向 事件 (central reorienting 
event, CRE) 发 挥 了 作用 , 强制 被 试 的 注意 由 周边 位 
置 回 到 中 央 注 视点 (Pratt & Fischer, 2002; Reuter- 
Lorenz et al., 1996)。 男 一 方面 ,大量 研 究 表 明 , X 
验 任务 难度 是 影响 IOR 的 一 个 重要 因素 (Martinarévalo 
et al., 2015), 相 比 任务 难度 较 简 单 的 检测 任务 ,办 


即使 在 短 SOA (400~600 ms) 条 件 下 。 
4.2 TOR 对 视听 觉 整 合 效应 的 调节 作用 

在 反应 时 结果 上 ,无 论 在 短 还 是 长 SOA 条 件 
F, 视听 觉 双 通 道 目 标的 反应 时 均 显著 快 于 单 通道 
的 视觉 、 听 党 目标 ， 即 产生 宛 余 信号 效应 ， 这 与 以 
往 人 研究 结果 一 致 (Hershenson，1962; Talsma & 
Woldorff, 2005)。 这 种 促进 效应 作为 视听 觉 整合 的 
主要 行为 学 指标 之 一 (Raab, 1962; Stein & Meredith, 
1993)， 体 现 了 双 通 道 信息 的 加 工 优势 。 另 外 ,基于 
rMRE, Race Model (Probability differenc) 及 pAUC 
这 三 种 反映 多 感觉 整合 效应 的 统计 指标 结果 (具体 
见方 法 部 分 )。 研 究 发 现 ,在 不 考虑 目标 刺激 呈现 位 
置 (外 源 性 有 效 线索 位 置 、 无 效 线索 位 置 ) 的 情况 下 ， 
随 着 SOA 的 增长 ,总 体 视 听觉 整合 效应 显著 增强 。 
然而 , 通过 在 视听 觉 目 标 刺激 前 设置 外 源 性 线索 ， 
区 分 出 的 外 源 性 有 效 线索 与 无 效 线索 两 个 位 置 ， 发 
HL SOA (400~600 ms) 时 ， 有 效 线 索 位 置 上 的 视听 
觉 整 合 效 应 显著 大 于 无 效 线索 位 置 , 与 以 往 人 研究 结 
果 一 致 (van der Stoep et al., 2016)。 但 长 SOA (1000~ 
1200 ms) 时 ， 有 效 与 无 效 线 索 位 置 上 的 视听 觉 整 合 
效应 并 无 显著 差异 。 

具体 来 看 ,在 短 SOA 条 件 下 ,外 源 性 注意 减 小 
有 效 线索 位 置 上 的 视听 觉 整 合 效 应 。 基 于 感知 觉 敏 
感度 假说 , van der Stoep 等 (2016) 认 为 视觉 IOR 效 应 
与 有 效 线索 位 置 上 感知 觉 敏 感度 的 降低 相关 (Slagter, 
Prinssen, Reteig, & Mazaheri, 2016)， 由 于 反比 效应 
原则 中 低 强 度 刺 激 引 起 的 多 感觉 整合 效应 更 大 ， 当 
前 的 行为 学 结果 并 不 支持 该 假说 。 基 于 空间 不 确定 
性 假说 ， 有 效 线索 位 置 上 外 源 性 线索 与 视听 觉 目标 
本 身 引 起 的 空间 定向 信息 是 元 余 的 。 当 目标 位 置 的 
空间 不 确定 性 提高 线索 空间 定向 的 重要 性 时 ， 视 听 
觉 目标 整合 的 重要 性 则 会 降低 ， 最 终 得 到 有 效 线索 
位 置 上 视听 觉 整 合 效 应 减少 的 结果 。 基 于 感觉 通道 
间 信 号 强度 差异 假说 , 视觉 线索 只 引起 了 视觉 通道 
目标 的 IOR 效应 ,并 没有 引起 听觉 通道 目标 的 IOR 
效应 。 当 有 效 线 索 位 置 上 视觉 目标 的 加 工时 间 由 于 
返回 抑制 变 得 更 慢 ， 听觉 目 标 并 没有 更 慢 时 , 视 、 
听 感 觉 通 道 间 加 工 速度 的 差异 增 大 会 导致 信号 强 


别 任务 中 IOR 的 出 现 需 要 更 长 的 SOA 且 其 效应 量 
更 小 (Chica, Lupianez, & Bartolomeo, 2006; Lupidfiez, 
Milan, Tornay, Madrid, & Tudela, 1997; Lupiafiez, 
Ruz, Funes, & Milliken, 2007)。 因此 ,， 相 比 以 往 研究 
中 的 Go/No-go 定位 检测 任务 , 本 研究 采用 的 简单 
检测 任务 能 够 更 早 地 诱发 出 视听 觉 目标 的 IOR 效 应 ， 


度 差异 也 随 之 增 大 ,最 终 得 到 有 效 线索 位 置 上 视听 
觉 整 合 效应 减少 的 结果 .可见 , 短 SOA 条 件 下 的 结 
既 支 持 空间 不 确定 性 假说 又 支持 感觉 通道 间 信 
强度 差异 假说 。 

然而 , 在 长 SOA 条 件 下 ， 有 效 与 无 效 线索 位 置 
上 的 视听 党 整合 效应 并 无 显著 差异 ， 且 所 有 目标 刺 
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激 通 道 类 型 上 均 发 生 显著 的 IOR 效应 ,因此 当前 行 
为 学 结果 仍然 不 支持 感知 觉 敏感 度假 说 。 基 于 空间 
不 确定 假说 ,目标 刺激 呈现 位 置 的 空间 不 确定 性 一 
直 存 在 ， 因 此 多 感觉 整合 效应 在 有 效 线索 位 置 上 应 
当 有 所 减 小 ,结果 并 不 支持 该 假说 。 我 们 推测 ,长 
时 间 延 时 准备 的 线索 -靶子 范式 中 考察 的 外 源 性 注 
意 在 某 种 程度 上 会 转换 为 内 源 性 注意 。 在 以 往 关 于 
内 源 性 注意 与 视听 觉 整 合 关 系 的 研究 中 , 人 研究 者 们 
发 现 内 源 性 注意 能 够 通过 调节 机 制 降低 感觉 通道 
内 的 干扰 信息 从 而 增强 视听 觉 信 息 输 入 的 可 靠 性 


置 ( 即 ， 无效 线索 位 置 ) 能 够 超越 探索 过 位 置 的 注意 
(Koningsbruggen, Gabay, Sapir, Henik, & Rafal, 
2010; Prime & Ward, 2006)。 如 上 所 述 ， 当 视听 觉 目 
标 IOR (降低 显著 性 ) 遇 到 视听 觉 整合 (增加 感知 觉 
显著 性 ) 时 ， 视 听觉 整合 可 以 帮助 视听 觉 目标 抵抗 
其 在 早期 感知 /注意 处 理 中 被 抑制 。 因此 ,在 本 研究 
H, 无 论 在 短 还 是 长 SOA 条 件 下 , 视听 觉 IOR 效 应 
均 显 著 小 于 视觉 IOR。 

综 上 所 述 , IOR 与 视听 觉 整 合 两 者 间 可 能 存在 
交互 关系 。 一 方面 , 视听 觉 整 合 能 够 调节 视听 觉 目 


(Macaluso et al., 2016), 最 终 增 强 注 意 位 置 ( 相 当 于 
有 效 线 索 位 置 ) 上 的 视听 觉 整 合 效 应 (Tang et al., 
2016)。 也 就 是 说 ,由 于 SOA 时 间 的 增长 ,可 能 使 
得 被 试 对 外 源 性 线索 产生 了 心理 准备 ， 从 而 降低 外 
源 性 线索 空间 定向 的 重要 性 ， 最终 得 到 有 效 线索 位 
置 与 无 效 线索 位 置 上 整合 效应 无 显著 差异 的 结果 。 
基于 感觉 通道 间 信 和 号 强度 差异 假说 ,视觉 线索 不 仪 
引起 视觉 通道 目标 还 引起 听觉 通道 目标 的 IOR 效 
应 , 单 通道 视 . 听 通 道 间 反应 时 之 差 相 比 短 SOA 条 
件 显著 减 小 ， 当 不 同 线索 有 效 性 (有 效 线索 、 无 效 线 
索 ) 位 置 上 的 单 通道 视 、 听觉 加 工 速度 相近 时 ,不 同 
线索 有 效 性 位 置 上 视听 觉 整 合 效应 并 无 显著 差异 。 
可 见 , 长 SOA 条 件 下 的 结果 支持 感觉 通道 间 信 号 
强度 差异 假说 。 
4.3 ”视听 党 整合 效应 对 IOR 的 影响 
基于 本 研究 的 行为 学 实验 结果 , IOR 与 视听 觉 

整合 效应 可 能 存在 交互 关系 ， 即 ,视听 觉 整 合 也 能 

影响 IOR, RARA, 无 论 在 短 还 是 长 SOA 条 件 
F, 视听 觉 目 标的 IOR 效应 均 显 著 小 于 视觉 目标 。 
以 往 研究 发 现 , 与 视觉 目标 同时 呈现 的 听觉 刺激 不 
仅 可 以 增强 感知 的 视觉 亮度 (Stein，London， 
Wilkinson, & Price, 1996), iB FT VA REAR AM it Xt EL BR 
值 (Lippert, Logothetis, & Kayser, 2007; Noesselt et 
al., 2010)。 另 外 ,代表 视听 觉 整 合 的 P50 成 分 (Giard 
& Peronnet, 1999; Talsma, Doty, & Woldorff, 2007) 
与 视觉 目标 的 感知 觉 显著 性 增加 有 关 (van der Burg, 
Olivers, Bronkhorst, & Theeuwes, 2008; van der 
Burg, Talsma, Olivers, Hickey, & Theeuwes, 2011). 
也 就 是 说 ， 同 时 呈现 的 听觉 刺激 能 够 增强 视觉 目标 
的 感知 觉 显著 性 。 而 TOR 作为 偏好 获取 新 信息 以 促 
进 视觉 搜索 效率 的 机 制 (Klein，1988; Klein, 2000; 
Posner, Rafal, Choate, & Vaughan, 1985)， 可 以 通过 
降低 先前 探索 过 空间 位 置 ( 即 ， 有 效 线 索 位 置 ) 的 显 
著 性 来 促进 视觉 探索 , 使 得 视野 中 其 它 未 探索 的 位 


标的 感知 觉 显 著 性 ， 从 而 帮助 视听 觉 目标 抵抗 在 外 
源 性 线索 -靶子 范式 中 的 抑制 效应 。 另 一 方面 , IOR 
能 够 调节 视听 觉 整合 效应 ， 当 前 结果 支持 感觉 通道 
间 信 号 强度 差异 假说 。 


5 结论 


在 不 同 SOA 条 件 下 , 视觉 IOR 对 视听 觉 整 合 
的 调节 作用 产生 变化 。 在 短 SOA 上 , 视觉 IOR 减 
少 视听 觉 整 合 效应 ; 在 长 SOA E, 视觉 通道 IOR 
效应 的 降低 , 减弱 对 视听 觉 整 合 效 应 的 调节 作用 。 
当前 研究 结果 支持 感觉 通道 间 信号 强度 差异 假说 。 
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Abstract 

Both audiovisual integration and inhibition of return (IOR) can facilitate the processing of sensory 
information, such as enhancing the perceptual processing. Previous studies found that IOR decreased the 
audiovisual integration at previously attended locations. Several hypotheses have been put forward to explain 
the effect of IOR on audiovisual integration: perceptual sensitivity, spatial uncertainty, and differences in 
unimodal signal strength. In present study, we used cue-target paradigm and manipulated the SOA conditions 
(400~600 ms vs. 1000~1200 ms) to investigate how audiovisual integration would be modulated by IOR induced 
by visual exogenous spatial cues. 

The current study was a 2 (SOA conditions: 400~600 ms, 1000~1200 ms) x 3 (target modalities: visual, 
auditory, audiovisual) x 2 (cue validities: cued, uncued) factorial design. Twenty-seven undergraduate students 
were recruited as paid volunteers from a university. The visual (V) target was a red and white block (1°x1°). The 
auditory (A) target (duration of 100 ms) was a 1000 Hz sinusoidal tone presented by speakers. The audiovisual 
(AV) target was composed by the simultaneous presentation of both the visual and the auditory stimuli. At the 
beginning of each trial, the fixation stimulus was presented for 800~1000 ms in the center of the display. 
Following the fixation stimulus, a visual white square served as a exogenous cue was presented for 50 ms at the 
left or right location randomly. Then, the fixation stimulus was randomly presented for 150~250/450~550 ms, 
which was followed by a central cue with a delay of 50 ms. Before the target (100 ms) occurrence, the fixation 
stimulus randomly appeared again for 150~250/450~550 ms. Thus, the SOA between the peripheral cue and the 
target was completed in 400~600/1000~1200 ms. The target (A, V, or AV) randomly appeared (6/7) for 100 ms 
in the left or right locations, or no stimulus appeared (1/7). During the experiment, participants were instructed 
to respond to the target stimulus at any possible locations by pressing a response button as quickly and 


accurately as possible. 
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The results showed that the responses to AV targets were faster than V or A targets, indicating the 
appearance of the bimodal advancement effect. A smaller magnitude of audiovisual IOR as compared to visual 
IOR was found whether it’s in short or long SOA conditions. In addition, visual IOR effect was significantly 
reduced under the long SOA condition compared with the short SOA condition while the audiovisual integration 
effect increased by SOA. The results of the relative multisensory response enhancement (rMRE), race model 
(probability difference) and positive area under the curve (pAUC) showed that audiovisual integration decreased 
at cued compared to uncued locations under the short SOA condition but not the long SOA condition. 

Based on the aforementioned findings, it is assumed that visual IOR decreased the audiovisual integration 
in the short SOA, and audiovisual integration would be modulated by different SOA conditions. The current 
result supported the hypothesis of differences in unimodal signal strength. 

Key words exogenous spatial attention; audiovisual integration; inhibition of return; race model; cue-target 
paradigm 


